Willem van Saint-Sauve liet in de 12de eeuw een versterkte woning bouwen tegen de helling van Thy-le-Château. Het diende als militaire vesting voor tal van adellijke clans in de komende eeuwen, waarvan enkelen aanpassingen aanbrachten aan het kasteel.
Na de Franse Revolutie kwam het kasteel in verval, en verviel het langzaam tot een ruïne.
In de 19de eeuw vestigden nieuwe eigenaren er een brouwerij. Aan het begin van de 20ste eeuw bestond nog slechts een klein gedeelte van het eens zo roemrijke kasteel, de donjon en de wallen waren verdwenen. Aan het einde van de 20ste eeuw kocht Dhr. Louis Piret, patroon van de smederijen van Thy-le-Château, het eigendom en hij begon meteen met de restauratie, die twintig jaar duurde.
Het kasteel diende twee keer als kerk. De eerste keer, in de jaren 30, tijdens de restauratie van de oude kerk en de tweede keer, in de jaren 40, nadat de kerk in de eerste dagen van de oorlog volledig werd vernietigd door een Duits bombardement.
Vandaag de dag biedt het kasteel onderdak aan het Musée Delporte, een museum waar u onder meer mooie schilderijen en beeldhouwwerken kunt bewonderen.